Calibration as a First-Class Criterion in LLM Evaluation
校准作为LLM评估中的一等标准
🧭 LLM评估 · 置信度校准
Johannes Gutenberg University Mainz · University of Colorado Boulder
主张将置信度校准纳入LLM评估核心，指出当前未采用导致部署与研究风险
📌 工作参考价值（4 点）
- 在业务中使用LLM做自动评估（LLM-as-a-judge）、合成数据生成或主动学习时，先验证模型置信度校准，否则会放大错误。例如生成搜索query或推荐文案时，模型给出的置信度可能过度自信，需要校准后再用于下游决策。
- 在离线评估benchmark中，除AUC、NDCG、准确率等性能指标外，同时报告校准分数（如ECE），成本极低，因为已有置信度和正确标签可直接计算。
- 对于开放式生成场景（如生成商品文案、推荐query），定义置信度和正确性困难，可探索一致性采样、自评估等方式获取近似置信度，并定期校准。
- 部署Agent自动决策时，对LLM输出置信度做校准或后处理，避免过度自信导致的错误动作，尤其在无人监督的自动化流程中。